ThoughtTrace: Understanding User Thoughts in Real-World LLM Interactions
ThoughtTrace：真实LLM对话中的用户思维数据集
🧭 用户思维采集与对齐 · 用户行为预测 ★ 深度解读
Johns Hopkins University · Massachusetts Institute of Technology · Google Research
首个大规模用户思维数据集，揭示对话中未言明的意图与反应，并展示其在行为预测与模型对齐中的价值。
📌 工作参考价值（4 点）
- 电商对话推荐：采集用户未显式表达的任务动机、内容/风格期望等‘理由’，构建用户意图特征，提升对话式推荐中自然语言理解的深度。
- Agent对齐：用户对助手回复的‘反应’（如内容相关性、呈现风格不满）可直接作为细粒度偏好信号，用于DPO/RLHF训练，比从后续消息推断偏好更准确、更密集。
- 用户模拟器：训练模型同时预测下一轮消息及对应的思考（理由+反应），生成更贴近真实用户认知过程的模拟对话，用于离线评估和强化学习环境。
- 工程落地：若业务场景允许，可在交互后收集用户事后标注的‘当时想法’，作为高价值训练信号；即使非侵入式，也可将点击、停留时长等作为思考的弱代理变量。